S-Agent: Spatial Tool-Use Elicits Reasoning for Spatial Intelligence
S-Agent:空间工具使用激发空间智能推理
🧭 空间智能 Agent 范式
NTU · THU · ByteDance · NWPU · Ropedia
将空间推理变为VLM规划的时空证据累积过程,配备层次化工具与双记忆,零样本提升多视图推理并可蒸馏小模型。
📌 工作参考价值(4 点)
- VLM 作为规划器结合层次化空间工具(2D→3D lifting)的模式可直接复用到电商多模态商品理解,例如调用工具提取商品尺寸、方位、遮挡关系等空间属性,丰富推荐特征。
- 双记忆设计(Scene Memory 存储场景状态 + Agent Memory 存储工具调用与推理历史)为对话式推荐 / 搜索中的多轮状态管理提供参考,能持续累积用户意图与工具反馈,避免孤立轮次。
- 推理时增强 + 轨迹蒸馏方法论(S-300K → S-Agent-8B)可借鉴到业务轻量模型升级:收集 LLM/VLM 的工具调用轨迹,微调小模型,在成本限制下获得复杂推理能力。
- 时空证据累积而非单帧预测的思路,对视频推荐或动态场景理解有价值,例如从用户浏览视频多帧中逐步累积兴趣证据,提升长期偏好建模的准确性。